Una revisión sistemática del uso de la inteligencia artificial en la educación / A systematic review of the use of artificial intelligence in education

Introducción. El uso de la inteligencia artificial (IA) en la educación ha sido objeto de una creciente atención en los últimos años. La IA se ha utilizado para mejorar la personalización del aprendizaje, la retroalimentación y la evaluación de los estudiantes. Sin embargo, también hay desafíos y limitaciones asociados. El objetivo de este trabajo fue identificar las principales tendencias y áreas de aplicación de la inteligencia artificial en la educación, así como analizar los beneficios y limitaciones de su uso en este ámbito. Métodos. Se llevó a cabo una revisión sistemática que exploró el empleo de la inteligencia artificial en el ámbito educativo. Esta revisión siguió una metodología de investigación basada en la búsqueda de literatura, compuesta por cinco etapas. La investigación se realizó utilizando Scopus como fuente de consulta primaria y se empleó la herramienta VOSviewer para analizar los resultados obtenidos. Resultados. Se encontraron numerosos estudios que investigan el uso de la IA en la educación. Los resultados sugieren que la IA puede mejorar significativamente la personalización del aprendizaje, proporcionando recomendaciones de actividades y retroalimentación adaptadas a las necesidades individuales de cada estudiante. Conclusiones. A pesar de las ventajas del uso de la IA en la educación, también hay desafíos y limitaciones que deben abordarse, como la calidad de los datos utilizados por la IA, la necesidad de capacitación para educadores y estudiantes, y las preocupaciones sobre la privacidad y la seguridad de los datos de los estudiantes. Es importante seguir evaluando los efectos del uso de la IA en la educación para garantizar su uso efectivo y responsable.

Introduction. The use of artificial intelligence (AI) in education has been the subject of increasing attention in recent years. AI has been used to improve personalized learning, feedback, and student assessment. However, there are also challenges and limitations. The aim of this study was to identify the main trends and areas of application of artificial intelligence in education, as well as to analyze the benefits and limitations of its use in this field. Methods. A systematic review was carried out on the use of artificial intelligence in education, using a literature search research methodology with five stages, based on the Scopus query and the tool for analyzing results with VOSviewer. Results. Numerous studies investigating the use of AI in education were found. The results suggest that AI can significantly improve personalized learning by providing activity recommendations and feedback tailored to the individual needs of each student. Conclusions. Despite the advantages of using AI in education, there are also challenges and limitations that need to be addressed, such as the quality of data used by AI, the need for training for educators and students, and concerns about the privacy and security of student data. It is important to continue evaluating the effects of AI use in education to ensure its effective and responsible use.

Perfil e percurso profissional de egressos dos cursos de mestrado e doutorado da Fundação Oswaldo Cruz (2013-2020) / Profile and career path of graduates from the Oswaldo Cruz Foundation master's and doctoral courses (2013-2020) / Perfil y trayectoria profesional de egresados de los cursos de maestría y doctorado de la Fundación Oswaldo Cruz (2013-2020)

Resumo: O objetivo do estudo é analisar o perfil de egressos e identificar fatores associados ao desempenho positivo relativo à trajetória de formação e de inserção profissional entre aqueles que concluíram cursos presenciais de mestrado e doutorado acadêmico da Fundação Oswaldo Cruz (Brasil). Participaram do estudo 2.462 egressos (1.402 de mestrado e 1.060 de doutorado) que responderam um questionário digital, contendo questões sobre perfil do egresso e inserção profissional antes do ingresso no curso e após a conclusão. Foi criada uma medida sobre "desempenho positivo pós-curso". Os resultados revelam que egressos de mestrado com impacto positivo do curso tendem a ser homens; ter especialização antes de ingressar no curso; ter emprego remunerado após o término do curso nas áreas de pesquisa, educação, assistência e gestão; e ser servidor público. No doutorado o seguinte perfil é evidenciado: egressos com emprego remunerado após o término do curso nas áreas de pesquisa ou educação; contratados por Regime Jurídico Único ou contrato temporário de pessoa jurídica; e com publicação científica ou patente. A avaliação/acompanhamento de egressos deve se instaurar como uma importante política pública educacional, incorporada no processo de autoavaliação institucional, o que possibilita rever rumos e prioridades na agenda educacional e pedagógica da instituição.

Abstract: This study aims to analyze the profile of graduates and identify factors associated with positive performance regarding training and professional insertion among those who have completed face-to-face master's and doctoral courses at the Oswaldo Cruz Foundation (Brazil). A total of 2,462 graduates participated in the study (1,402 master's and 1,060 doctoral graduates), who answered a digital questionnaire containing questions about individual characteristics and professional insertion before entering the course and after completion. A measure on "positive post-course performance" was created. The results show that Master's graduates with a positive impact from the course tend to be men; to have a specialization degree before entering the course; to have paid employment after finishing the course in the areas of research, education, assistance, and management; and to be civil servants. In the Doctorate, the following profile is evident: graduates with paid employment after finishing the course in the areas of research or education; hired under a single legal regime or temporary contract as a legal entity; and with a scientific publication or patent. Evaluating/monitoring graduates must be established as an important public educational policy, incorporated into the institutional self-evaluation process, which makes it possible to review directions and priorities in the institution's educational and pedagogical agenda.

Resumen: El objetivo del estudio es analizar el perfil de egresados e identificar factores asociados al desempeño positivo relacionado a la trayectoria de formación e inserción profesional entre aquellos que concluyeron cursos presenciales de maestría y doctorado académico de la Fundación Oswaldo Cruz (Brasil). Participaron del estudio 2.462 egresados (1.402 de maestría y 1.060 de doctorado) que contestaron el cuestionario de manera digital, con preguntas sobre el perfil del egresado y la inserción profesional antes del ingreso al curso y tras su conclusión. Se creó una medida sobre "desempeño positivo tras el curso". Los resultados muestran que los egresados de la maestría con un impacto positivo del curso tienden a ser hombres; tener especialización antes de ingresar al curso; tener trabajo remunerado tras concluir el curso en las áreas de investigación, educación, asistencia y gestión; y ser funcionario público. Se evidencia el siguiente perfil en el doctorado: egresados con trabajo remunerado tras el término del curso en las áreas de investigación o educación; contratados bajo un régimen jurídico único o un contrato temporal de persona jurídica; y con publicación científica o patente. La evaluación/seguimiento de egresados se debe establecer como una importante política pública educativa, incorporada en el proceso de autoevaluación institucional, lo que permite revisar direcciones y prioridades en la agenda educativa y pedagógica de la institución.

Terminal efficiency, Lag and dropout in cohorts from 2007 to 2014 of dental students at the University of Costa Rica / Eficiencia terminal, rezago y abandono en las cohortes del 2007 al 2014 de estudiantes de Odontología de la Universidad de Costa Rica

Abstract Determine the terminal efficiency, lag and dropout in the cohorts of students who entered the dentistry career at the Faculty of Dentistry at University of Costa Rica in the lapse 2007 to 2014. Data from 736 files were collected. The variables considered were sex, admission age, nationality, marital status, children, admission note, domicile and high school. The data was collected from the Student Application System, the physical files, and the data base from the Supreme Court of Elections of Costa Rica. Descriptive statistics, bivariate and multivariate analysis were made, which were implemented from two logistic regression models. 98% of the students were Costa Rican, 68% women, 79% entered according to the admission note, 43% entered with an age of 18 years or less, 50% came from a public school, 77% resided in the Greater Metropolitan Area and 95% were single and remained without children. The average terminal efficiency was 6%; 46% of students have graduated with lag, 16% are still enrolled and 32% dropped out. Sex, age, admission note, and motherhood are sociodemographic variables that are associated with terminal efficiency and dropout. The average terminal efficiency in the cohorts from 2007 to 2014 in the courses at the Faculty of Dentistry University of Costa Rica was very low, almost half of the students graduated with lag and about a third dropped out the studies. The grade from the admission note seems to be a predictor of students'academic behavior, higher grade had more chances of graduating and less likely to dropout.

Resumen Determinar la eficiencia terminal, el rezago y el abandono en las cohortes de los estudiantes que ingresaron a la carrera de Odontología de la Facultad de Odontología UCR en el período 2007 al 2014. Se recopilaron los datos de 736 expedientes. Las variables consideradas fueron: sexo, edad de ingreso, nacionalidad, estado civil, hijos, lugar y colegio de procedencia, y nota de examen de admisión. Los datos se recopilaron del Sistema de Aplicaciones Estudiantiles, los expedientes físicos y del Tribunal Supremo de Elecciones de Costa Rica. Se realizó estadística descriptiva, análisis bivariado y multivariado que se implementó a partir de dos modelos de regresión logística. El 98% de los estudiantes fueron costarricenses, el 68% mujeres, el 79% ingresó según la nota de admisión, el 43% ingresó con una edad de 18 años o menos, el 50% provenía de un colegio público, el 77% residía en la gran área Metropolitana y el 95% eran solteros y permanecieron sin hijos. La eficiencia terminal en promedio fue de 6%; el 46% de los estudiantes se han graduado con rezago, el 16% continúan matriculados y el 32% hizo abandono de los estudios. El sexo, la edad, la nota del examen de admisión y la maternidad son variables sociodemográficas que se asocian con la eficiencia terminal y el abandono. El promedio de la eficiencia terminal en las cohortes del 2007 al 2014 en la carrera de Odontología de la Facultad de Odontología UCR fue muy bajo, casi la mitad de los estudiantes se han graduado con rezago y cerca de un tercio hizo abandono de los estudios. La nota del examen de admisión parece ser un predictor en el comportamiento académico de los estudiantes: a mayor nota más posibilidades de graduarse y menos de abandonar la carrera.

Percepciones de profesores y estudiantes acerca de la utilización del portafolios en la asignatura Prevención en Salud

Fundamento: en el ámbito de la pedagogía universitaria, el modelo docente adopta una nueva visión, el aprendizaje desarrollador y la evaluación educativa; en este contexto ha surgido, en los últimos años, el portafolios. Objetivo valorar la percepción de profesores y estudiantes sobre la utilización del portafolio como herramienta de aprendizaje en la asignatura Prevención en Salud. Métodos: investigación educacional, realizada en la Universidad de Ciencias Médicas de Cienfuegos en el primer período del curso 2022, sobre un universo constituido por el total de estudiantes de segundo año que cursaron la asignatura y los profesores que fungieron como tutores. La muestra fue seleccionada al azar, 64 estudiantes y 36 profesores, que aceptaron participar en la investigación respetando los principios éticos. Se empleó la técnica de la entrevista, se diseñó un cuestionario semiestructurado para explorar la opinión de estudiantes y profesores. Resultados: los docentes consideraron de utilidad el portafolio para el aprendizaje, al permitir objetivar y documentar las competencias, logrando dinamismo y estímulo para la reflexión; alegaron inconformidad en la evaluación refiriendo que requiere de mucho tiempo. Los estudiantes recibieron orientaciones sobre el portafolio, que les permitieron prepararse para su profesión, organizarse y autoevaluarse. Como debilidad destacaron la laboriosidad al considerarlo estresante, refiriéndose a la responsabilidad y al tiempo disponible e insuficiente motivación que brindan los tutores. Conclusiones: el portafolio es un instrumento centrado en el aprendizaje de competencias, con participación del estudiante y un tipo de evaluación que estimula la responsabilidad aplicando los conocimientos de la vida real en la práctica médica.

Foundation: in the university pedagogy field, the teaching model adopts a new vision: developer learning and educational evaluation; in this context, the portfolio has emerged in recent years. Objective: to assess the perception of teachers and students about the use of the portfolio as a learning tool in the Health Prevention subject. Methods: educational research, at the Cienfuegos Medical Sciences University in the first period of the 2022 academic year, a universe made up of the total number of second-year students who took the subject and the professors who served as tutors. The sample was randomly selected, 64 students and 36 teachers, who agreed to participate in the research respecting ethical principles. The interview technique was used, a semi-structured questionnaire was designed, exploring the opinion of students and teachers. Results: the teachers considered the portfolio useful for learning, as it allowed objectifying and documenting the competencies, achieving dynamism and stimulating reflection, they claimed disagreement in the evaluation, stating that it requires a lot of time. The students received guidance on the portfolio, which allowed them to prepare for their profession, organize and self-evaluate. As a weakness, they highlighted industriousness, considering it stressful, referring to the responsibility and the time available and insufficient motivation provided by the tutors. Conclusions: the portfolio is an instrument focused on learning competencies, with student participation and a type of evaluation that stimulates responsibility by applying real-life knowledge in medical practice.

Intervención educativa en una enfermedad desatendida: hidatidosis/ equinococosis quística en escolares del norte de Chile

Introducción: La hidatidosis es una zoonosis cuyo control más eficiente y eficaz es la promoción en salud, especialmente en la población infante-juvenil. Objetivo: Medir el impacto de un programa de intervención educativa sobre hidatidosis en escolares del norte de Chile. Método: Estudio intervencional educativo con fases pre y post test en 3.145 estudiantes de educación preescolar, primaria y secundaria de tres comunas. Se definieron dimensiones, unidades educativas y sistemas de evaluación incorporados en las bases curriculares. Se calculó el puntaje de logro de respuestas correctas utilizando la prueba t. Se estimó el tamaño del efecto mediante d de Cohen y análisis de varianza mixto. Resultados: Se encontraron diferencias estadísticamente significativas en la muestra total y en las variables género, comuna, procedencia rural-urbana y nivel de educación. Los puntajes post intervención fueron mayores y con tamaños de efecto grandes a excepción de los primeros niveles de educación. Se hallaron puntajes mayores post test y efectos de interacción con diferencias significativas en rural-urbano y en comuna anteriormente intervenida. La dimensión mejor evaluada fue "medidas de autocuidado" y la más baja "tenencia responsable de perros". Conclusiones: El programa educativo fue efectivo al ser dirigido a grupos etarios, mediante métodos pedagógicos en las bases curriculares de los establecimientos educacionales.

Background: Hydatidosis is a zoonosis whose most efficient and effective control is health promotion, especially in children and youth. Aim: To measure the impact of an educational intervention program on hydatidosis in schoolchildren in northern Chile. Method: Educational interventional study was performed with pre-post test phases in 3,145 students of preschool, primary and secondary education from three districts. Dimensions, educational units and evaluation systems were defined and incorporated into the curricular bases. The correct answer achievement score was calculated using the T-test. Effect size was estimated using Cohen's d and mixed analysis of variance. Results: Statistically significant differences were found in the total sample and in variables such as gender, district, rural-urban origin and level of education. Post-intervention scores were higher than pre-intervention and with large effect sizes, except for the first levels of education. Higher post-test scores and interaction effects were found with significant differences in rural-urban and in a previously intervened district. The best evaluated dimension was "self-care measures" and the lowest was "responsibly keeping dogs". Conclusions: The educational program was effective when directed to age groups, through pedagogical methods in the curricular bases of educational facilities.

Diagnóstico de calidad de los resúmenes de tesis de maestría en enfermería / Quality diagnosis in abstracts of master's thesis in nursing

Resumen Objetivo: Analizar las dimensiones de estructura del resumen y referencias bibliográficas en la calidad de las tesis de los graduados de 2015 a 2020 de la maestría en Enfermería de la Universidad Nacional Autónoma de México. Materiales y Métodos: Investigación cuantitativa, descriptiva y analítica. La muestra no probabilística estuvo integrada por 96 tesis de nivel maestría de cinco generaciones de graduados 2015-2020. El instrumento se conforma por 30 ítems, se adaptó al contexto del posgrado y fue validado por expertos en cuanto a claridad en la redacción, congruencia con la dimensión a valorar y pertinencia. Se llevó a cabo un estudio piloto en una población similar a la del estudio (14 tesis de posgrado). en las cinco dimensiones consideradas en la escala. Se utilizó la Correlación de Spearman para establecer una relación de las dimensiones y la calidad del resumen de la tesis. Se utilizó el paquete estadístico SPSS versión 21. Resultados: Las correlaciones obtenidas son positivas en todos los casos. La dimensión contenido y organización presenta una mayor correlación con las de resultados y metodología y la más fuerte con las referencias bibliográficas respecto a las otras dimensiones. La dimensión metodología obtuvo mayor significancia con resultados y discusión. La dimensión de resultados con la de metodología y la de contenido y organización. La dimensión de discusión con las dimensiones de resultados y metodología. Conclusiones: El diagnóstico permitió identificar que el resumen es fundamental para visibilizar la producción de tesis de la Maestría en Enfermería en bases de datos científicas. La estructura clara y homologada de los resúmenes y de las referencias bibliográficas es un criterio importante en la autoevaluación del programa.

Abstract Objective: Analyze the structure dimensions of the summary and bibliographic references in the quality of the theses of graduates from 2015 to 2020 of the master's degree in Nursing from the National Autonomous University of Mexico. Materials and methods: Quantitative, descriptive and analytical research. The non-probabilistic sample consisted of 96 master's level theses from five generations of graduates 2015-2020. The instrument is made up of 30 items, it was adapted to the postgraduate context and was validated by experts in terms of clarity in the wording, congruence with the dimension to be assessed and relevance. A pilot study was carried out in a population similar to that of the study (14 postgraduate theses). in the five dimensions considered in the scale. Spearman's Correlation was used to establish a relationship between the dimensions and the quality of the thesis summary. The statistical package SPSS version 21 was used. Results: The correlations obtained are positive in all cases. The content and organization dimension presents a greater correlation with those of results and methodology and the strongest with the bibliographical references with respect to the other dimensions. The methodology dimension obtained greater significance with results and discussion. The dimension of results with that of methodology and that of content and organization. The discussion dimension with the dimensions of results and methodology. Conclusions: The diagnosis made it possible to identify that the summary is essential to make visible the production of the Master's theses in Nursing in scientific databases. The clear and approved structure of the abstracts and bibliographical references is an important criterion in the self-evaluation of the program.

Desarrollo de la Competencia Intercultural desde la formación de pregrado en la educación médica superior

La necesidad de desarrollar competencias interculturales no solo es un imperativo ético, en términos del respeto y comprensión de aquellas culturas diferentes, sino también un requisito técnico. Un profesional que pueda vincularse exitosamente con personas de diversas culturas probablemente logrará una interacción efectiva con usuarios y comunidades, un mayor nivel de confianza, que se traducirá en una mayor satisfacción con el cuidado y mejor adherencia terapéutica. En el presente artículo se analiza desde el punto de vista teórico la incorporación de la competencia intercultural en los currículos de las carreras de la salud. Se realizó una revisión bibliográfica de artículos y documentos relacionados con la competencia intercultural en la educación superior en bases de datos Pubmed y Scielo, y en páginas web de organizaciones ligadas con la temática de enseñanza y aprendizaje en educación superior, cultura y diversidad.

The need to develop intercultural competences is not only an ethical imperative, in terms of respect and understanding of those different cultures, but also a technical requirement. A professional who can successfully connect with people from diverse cultures will probably achieve effective interaction with users and communities, a higher level of trust, which will translate into greater satisfaction with care and better therapeutic adherence. This article analyzes from a theoretical point of view the incorporation of intercultural competence in the curricula of health careers. A bibliographic review of articles and documents related to intercultural competence in higher education was carried out in Pubmed and Scielo databases, and in web pages of organizations linked to the subject of teaching and learning in higher education, culture and diversity.

Rúbricas como instrumento de evaluación de ateneos en una residencia de Bioquímica Clínica de un hospital universitario. Estudio sobre su confiabilidad e impacto educativo / Rubrics as an evaluation instrument for conferences in a Clinical Biochemistry residency at a university hospital. Study on its reliability and educational impact / Rubricas como instrumento de avaliação de congressos em uma residência de Bioquímica Clínica de um hospital universitário. Estudo sobre sua confiabilidade e impacto educacional

Resumen El objetivo del estudio fue describir el uso de rúbricas para la evaluación formativa de la participación de profesionales en formación en el desarrollo de ateneos. Se realizó un estudio observacional, descriptivo, transversal y retrospectivo sobre la rúbrica de ateneos de programas de formación de posgrado de Bioquímica Clínica y se analizó la confiabilidad (por medio del coeficiente alfa de Cronbach) y su impacto educativo. Se analizaron 51 rúbricas sobre 41 ateneos de 9 profesionales en formación (residentes y becarios) por 19 evaluadores. La estimación de confiabilidad arrojó un alfa de Cronbach de 0,71 (nivel de confianza del 95%, p≤0,05). La rúbrica aquí analizada ha servido para clarificar las metas de aprendizajes de una actividad tradicional en la formación de posgrado en servicio. Se ha logrado generar un instrumento de evaluación confiable que puede ser utilizado en otras profesiones y especialidades del equipo de salud.

Abstract The objective of the study was to describe the use of rubrics for the formative evaluation of the participation of professionals in training in the development of conferences. An observational, descriptive, cross-sectional and retrospective study was carried out on the rubric of athenaeums of postgraduate training programmes in Clinical Biochemistry, analysing its reliability (by means of Cronbach's alpha coefficient) and its educational impact. Fifty-one rubrics difewere analysed on 41 athenaeums of 9 professionals in training (residents and fellows) by 19 evaluators. The reliability estimate yielded a Cronbach's alpha of 0.71 (95% confidence level, p≤0.05). The rubric analysed here has served to clarify the learning goals of a traditional activity in postgraduate training in service. It has been possible to generate a reliable evaluation instrument that can be used in other professions and specialties of the health team.

Resumo O objetivo do estudo foi descrever a utilização de rubricas para avaliação formativa da participação de profissionais em formação no desenvolvimento de ateneus. Foi realizado um estudo observacional, descritivo, transversal e retrospectivo da rubrica de ateneus dos programas de formação pós-graduação em Bioquímica Clínica, analisando a sua fiabilidade (através do coeficiente alpha de Cronbach) e o seu impacto educacional. Cinquenta e uma rubricas de 41 ateneus de 9 profissionais em formação (residentes e bolsistas) foram analisadas por 19 avaliadores. A estimativa de confiabilidade resultou em um alfa de Cronbach de 0,71 (nível de confiança de 95%, p≤0,05). A rubrica aqui analisada serviu para esclarecer os objetivos de aprendizagens de uma atividade tradicional na formação pós-graduação em serviço. Foi possível gerar um instrumento de avaliação confiável que pode ser utilizado em outras profissões e especialidades da equipe de saúde.

Resultados del Mini Clinical Evaluation Exercise aplicado en la carrera de Enfermería. Universidad Estatal del Sur de Manabí, 2021

Fundamento en el contexto de las especialidades y carreras del campo de la salud se requiere implementar instrumentos de evaluación de prácticas clínicas basadas en competencias, los cuales cumplan con los criterios requeridos en correspondencia con su función. Objetivo evaluar los resultados del Mini Clinical Evaluation Exercise aplicado en la evaluación de prácticas clínicas basadas en competencias para la carrera de Enfermería. Métodos estudio comparativo con intervención educativa, en el cual se aplicó el Mini Clinical Evaluation Exercise como instrumento de evaluación de las competencias en las prácticas preprofesionales de estudiantes de la carrera de Enfermería, Facultad Ciencias de Salud de la Universidad Estatal del Sur de Manabí, en 2021. El test de Wilcoxon se usó para comparar las puntuaciones. Resultados las variables que mostraron diferencias significativas entre ambos momentos de aplicación del instrumento fueron las dimensiones: actitudinales hacia pacientes y equipo de salud (p=0,007) y valoración (p=0,10). Se observaron puntuaciones estadísticamente superiores en el segundo momento de evaluación (p=0,023). La evaluación realizada por los docentes evidenció la mejora del proceso de atención de enfermería, principalmente en cuanto a garantizar la privacidad del paciente (media de 7,46). Conclusiones el Mini Clinical Evaluation Exercise es aplicable al contexto de la educación superior de Salud en Ecuador. Se constata como una alternativa para evaluar competencias en la carrera de Enfermería.

Background in the context of specialties and careers in the health field, it is necessary to implement clinical practice evaluation instruments based on competencies, which meet the required criteria in accordance with their function. Objective to evaluate the results of the Mini Clinical Evaluation Exercise applied in the evaluation of clinical practices based on competencies for the Nursing career. Methods comparative study with educational intervention, in which the Mini Clinical Evaluation Exercise was applied as an instrument for evaluating competencies in pre-professional practices of Nursing students, Health Sciences Faculty of the Southern State University of Manabí, in 2021. The Wilcoxon test was used to compare scores. Results the variables that showed significant differences between the instrument application two moments were the dimensions: attitudes towards patients and the health team (p=0.007) and assessment (p=0.10). Statistically higher scores were observed at the second evaluation moment (p=0.023). The evaluation carried out by the teachers evidenced the improvement of the nursing care process, mainly in terms of guaranteeing the patient's privacy (mean of 7.46). Conclusions the Mini Clinical Evaluation Exercise is applicable to the context of higher health education in Ecuador. It is verified as an alternative to evaluate competencies in the Nursing career.

Um instrumento de avaliação do interno de pediatria na Atenção Primária à Saúde / An instrument for evaluation of medical students during the internship of pediatrics Primary Health Care / Un instrumento de evaluación de estudiantes de pediatría en Atención Primaria de Salud

Os estudantes de Medicina têm contato com diferentes áreas e cenários durante o internato e devem ter seu desempenho avaliado em cada um deles. Contudo, muitos estudantes não se sentem devidamente avaliados e, diante disso, nosso objetivo foi desenvolver um instrumento de avaliação do desempenho de estudantes de Medicina, no período do internato em pediatria, para uso durante o estágio realizado na Atenção Primária à Saúde. Realizou-se uma pesquisa metodológica com elaboração de um instrumento e contribuição de especialistas com experiência em ensino, por meio de convites eletrônicos. Ao final do estudo, utilizando-se a técnica Delphi, dos vinte itens constantes no instrumento original, dezessete foram aceitos pelos 11 especialistas que participaram das duas rodadas de análise. Dessa forma, a pesquisa alcançou seu objetivo e, por meio deste artigo, divulgamos a proposta de um "Instrumento de avaliação de internos de Medicina no estágio de pediatria na Atenção Primária à Saúde".

Medical students have contact with different areas and scenarios during their internship and must have their performance evaluated in each of them. However, as many students do not feel properly evaluated, our objective was to develop an instrument to evaluate the performance of Medical students, during their internship in pediatrics, to be used during their practice in Primary Health Care. A methodological research was carried out with the elaboration of an instrument and the contribution of specialists with experience in teaching, using electronic invitations. At the end of the study, through the Delphi technique, seventeen of the twenty items contained in the original instrument were accepted by the 11 specialists who participated in the two rounds of analysis. Thus, the research reached its objective and, through this article, we disseminate the proposal of an "Instrument for the evaluation of Medical interns in the pediatric internship in Primary Health Care".

Los estudiantes de Medicina tienen contacto con diferentes áreas y escenarios durante su pasantía y deben evaluar su desempeño en cada uno de ellos. Sin embargo, muchos estudiantes no se sienten debidamente evaluados y, ante eso, nuestro objetivo fue desarrollar un instrumento para evaluar la actuación de los estudiantes de Medicina, durante su pasantía en pediatría, para ser utilizado mientras ejecutan la Atención Primaria de Salud. Se realizó una investigación metodológica con la elaboración de un instrumento y el aporte de especialistas con experiencia en la docencia, a través de invitaciones electrónicas. Al final del estudio, utilizando la técnica Delphi, de los veinte ítems contenidos en el instrumento original, se aceptaron diecisiete por los 11 especialistas que participaron en las dos rondas de análisis. De esta forma, la investigación alcanzó su objetivo y, por medio de este artículo, divulgamos la propuesta de un "Instrumento para la evaluación de Médicos internos en el internado de pediatría en Atención Primaria de Salud".

Construção e validação de quiz para avaliação de conhecimento cognitivo sobre febre maculosa / Construcción y validación de un cuestionario para evaluar los conocimientos cognitivos sobre la fiebre maculosa / Creation and validation of a quiz to assess cognitive knowledge about spotted fever

RESUMO Objetivo: construir e validar um Quiz de avaliação cognitiva sobre Febre Maculosa, voltado para avaliar o conhecimento de estudantes que moram e/ou frequentam cidades de risco para a doença. Métodos: estudo metodológico desenvolvido em três etapas: construção do Quiz; validação de aparência e conteúdo com nove juízes, com análise realizada através do cálculo de Índice de Validade de Conteúdo, com valor de corte 0,80; e validação semântica, seguindo a metodologia DISABKIDS® com 12 alunos de cursos técnicos profissionalizantes, com avaliação dos dados realizada por estatística descritiva, tendo sido utilizado o programa Statistical Package for the Social Sciences. Resultados: o processo de validação foi subdividido em duas etapas: validação de aparência e conteúdo por profissionais das áreas de biologia e educação e validação semântica por alunos de cursos profissionalizantes. O Quiz foi elaborado e aplicado e os resultados mostraram um índice de validade de conteúdo superior a 0,80 para todas as variáveis analisadas. Na validação semântica, o Quiz foi considerado como de fácil compreensão e não houve dificuldade para o preenchimento. Conclusão: o Quiz construído foi validado quanto à aparência, ao conteúdo e à semântica, tendo alcançado concordância satisfatória, o que garante ser um instrumento adequado para o processo de avaliação sobre a temática investigada. Com isso, espera-se contribuir para a difusão de conhecimento acerca da identificação dos fatores de risco e da prevenção da saúde relacionados à Febre Maculosa.

RESUMEN Objetivo: construir y validar un Cuestionario de evaluación cognitiva sobre la Fiebre Maculosa, destinado a evaluar los conocimientos de los estudiantes que viven y/o asisten a ciudades con riesgo para la enfermedad. Métodos: estudio metodológico desarrollado en tres etapas: construcción del Cuestionario; validación de apariencia y contenido con nueve jueces con análisis realizado mediante el cálculo del Índice de Validez de Contenido, con un valor de corte de 0.80 y validación semántica, siguiendo la metodología DISABKIDS® con 12 estudiantes de carreras técnicas profesionales, con evaluación de datos realizada mediante estadística descriptiva, donde se utilizó el programa Statistical Package for the Social Sciences. Resultados: el proceso de validación se subdividió en dos etapas: validación de apariencia y contenido por profesionales de las áreas de biología y educación, y validación semántica por estudiantes de carreras profesionales. El Cuestionario fue diseñado y aplicado. Los resultados mostraron un índice de validez de contenido superior a 0,8 para todas las variables analizadas. En la validación semántica, el Cuestionario se consideró fácil de entender y no hubo dificultades para completarlo. Conclusión: el Cuestionario construido fue validado en cuanto a apariencia, contenido y semántica, habiendo logrado concordancia satisfactoria, lo que garantiza que es un instrumento adecuado para el proceso de evaluación sobre el tema investigado. Con esto, se espera contribuir a la difusión del conocimiento sobre la identificación de factores de riesgo y prevención de la salud relacionados con la Fiebre Maculosa.

ABSTRACT Objective: to create and validate a cognitive assessment Quiz about Spotted Fever, targeted at evaluating what students living in and/or traveling to risk cities know about the disease. Methods: a methodological study developed in three stages: creation of the Quiz; face and content validation with nine judges, with analysis performed by calculating the Content Validity Index, with a cutoff value of 0.80; and semantic validation, following the DISABKIDS® methodology with 12 students from professional technical courses, with data evaluation performed by means of descriptive statistics, using the Statistical Package for the Social Sciences program. Results: the validation process was subdivided into two stages: face and content validation by professionals in the Biology and Education areas, and semantic validation by students attending professional courses. The Quiz was prepared and applied and the results showed a Content Validity Index above 0.80 for all the variables analyzed. In the semantic validation, the Quiz was considered as easy to understand and there were no difficulties filling it in. Conclusion: the Quiz created was validated in terms of face, content and semantics, having achieved satisfactory agreement, which guarantees that it is an adequate instrument for the evaluation process on the theme investigated. With this, the expectation is to contribute to disseminating knowledge about the identification of risk and health prevention factors related to Spotted fever.

Construção e validação de Quiz para avaliação de conhecimento cognitivo sobre febre maculosa / Creation and validation of a quiz to assess cognitive knowledge about spotted fever / Construcción y validación de un cuestionario para evaluar los conocimientos cognitivos sobre la fiebre maculosa

Objetivo: construir e validar um Quiz de avaliação cognitiva sobre Febre Maculosa, voltado para avaliar o conhecimento de estudantes que moram e/ou frequentam cidades de risco para a doença. Métodos: estudo metodológico desenvolvido em três etapas: construção do Quiz; validação de aparência e conteúdo com nove juízes, com análise realizada através do cálculo de Índice de Validade de Conteúdo, com valor de corte 0,80; e validação semântica, seguindo a metodologia DISABKIDS® com 12 alunos de cursos técnicos profissionalizantes, com avaliação dos dados realizada por estatística descritiva, tendo sido utilizado o programa Statistical Package for the Social Sciences. Resultados: o processo de validação foi subdividido em duas etapas: validação de aparência e conteúdo por profissionais das áreas de biologia e educação e validação semântica por alunos de cursos profissionalizantes. O Quiz foi elaborado e aplicado e os resultados mostraram um índice de validade de conteúdo superior a 0,80 para todas as variáveis analisadas. Na validação semântica, o Quiz foi considerado como de fácil compreensão e não houve dificuldade para o preenchimento. Conclusão: o Quiz construído foi validado quanto à aparência, ao conteúdo e à semântica, tendo alcançado concordância satisfatória, o que garante ser um instrumento adequado para o processo de avaliação sobre a temática investigada. Com isso, espera-se contribuir para a difusão de conhecimento acerca da identificação dos fatores de risco e da prevenção da saúde relacionados à Febre Maculosa.(AU)

Objective: to create and validate a cognitive assessment Quiz about Spotted Fever, targeted at evaluating what students living in and/or traveling to risk cities know about the disease. Methods: a methodological study developed in three stages: creation of the Quiz; face and content validation with nine judges, with analysis performed by calculating the Content Validity Index, with a cutoff value of 0.80; and semantic validation, following the DISABKIDS®methodology with 12 students from professional technical courses, with data evaluation performed by means of descriptive statistics, using the Statistical Package for the Social Sciences program. Results: the validation process was subdivided into two stages: face and content validation by professionals in the Biology and Education areas, and semantic validation by students attending professional courses. The Quiz was prepared and applied and the results showed a Content Validity Index above 0.80 for all the variables analyzed. In the semantic validation, the Quiz was considered as easy to understand and there were no difficulties filling it in. Conclusion: the Quiz created was validated in terms of face, content and semantics, having achieved satisfactory agreement, which guarantees that it is an adequate instrument for the evaluation process on the theme investigated. With this, the expectation is to contribute to disseminating knowledge about the identification of risk and health prevention factors related to Spotted fever.(AU)

Objetivo: construir y validar un Cuestionario de evaluación cognitiva sobre la Fiebre Maculo-sa, destinado a evaluar los conocimientos de los estudiantes que viven y/o asisten a ciudades con riesgo para la enfermedad. Métodos: estudio metodológico desarrollado en tres etapas: construcción del Cuestionario; validación de apariencia y contenido con nueve jueces con aná-lisis realizado mediante el cálculo del Índice de Validez de Contenido, con un valor de corte de 0.80 y validación semántica, siguiendo la metodología DISABKIDS® con 12 estudiantes de carreras técnicas profesionales, con evaluación de datos realizada mediante estadística des-criptiva, donde se utilizó el programa Statistical Package for the Social Sciences. Resultados: el proceso de validación se subdividió en dos etapas: validación de apariencia y contenido por profesionales de las áreas de biología y educación, y validación semántica por estudiantes de carreras profesionales. El Cuestionario fue diseñado y aplicado. Los resultados mostraron un índice de validez de contenido superior a 0,8 para todas las variables analizadas...(AU)

Virtual learning object about oral ulcerative lesions: controlled educational intervention study

Abstract The aim of this study was to develop a virtual learning object (VLO) to teach undergraduate dental students about the diagnostic and therapeutic approaches to oral ulcerative lesions. The VLO was developed with information on the diagnostic process, lesion classification, and clinical-surgical management of oral ulcerative lesions. The VLO content was initially validated by a group of specialists. Learning was evaluated in a sample of 58 undergraduate dental students, divided into control group (conventional theoretical class, n = 29) and intervention group (interaction with VLO, n = 29). All students answered a pre-test and post-test questionnaire. The VLO group also answered a specific questionnaire on the evaluation of the VLO. Both quantitative and qualitative descriptive analyses were performed. The validation showed that professors and students considered the VLO adequate. The use of the VLO was recommended by 100% of professors and 86.6% of students. In the intervention group, the results showed a significantly higher number of correct answers in the post-test (p < 0.01). In conclusion, the VLO proved to be a useful tool for teaching oral medicine, contributing significantly to the knowledge of ulcerated lesions in the mouth.

Contemporary reflection on the educational levels of high-performance soccer players in Brazil

ABSTRACT Objective As the soccer culture in Brazil is more popular than schooling, this study reflected on the formal education levels of soccer (football) players through descriptive and quantitative analyses. Methods We evaluated 179 national soccer players playing various positions on different teams across six seasons (2012, 2013, 2014, 2015, 2016, and 2022). Data were collected using a questionnaire comprising the following variables: age, position in the pitch, age of professionalization, and education (years of study). The data were distributed according to the pitch position. Results The mean age, length of professional career, and professionalization age were 23±6 years, 7±5 years, and 17±2 years, respectively. In terms of education, 121 athletes (67%) completed high school, equivalent to 11 years of study. Only 5.5% completed higher education, with defensive players (goalkeepers and defenders) being the most educated at 37% (66/179). According to 2017 figures from the Pesquisa Nacional por Amostra de Domicílios Contínua of the Federal Government of Brazil, the schooling rate is 31.7%, wherein 46.1% of Brazilians aged 25 years or over have completed education. In this study of 179 athletes, 67% had completed high school. Thus, players outrank the Brazilian population in terms of achieving a high school education. There were marked disparities in the relative proportions of goalkeepers (85%), defensive players (68%), midfielders (63%), and forward players (64%) in terms of their education. Conclusion Our survey revealed that attending higher education remains a distant reality in Brazil.

Perfil do egresso médico de uma instituição de ensino superior do Nordeste do Brasil / Profile of medical graduates from a higher education institution in Northeastern Brazil

Resumo Introdução: Nos últimos anos, ocorreu um aumento da quantidade de faculdades médicas no Brasil, e, concomitante a isso, houve a ampliação do interesse em melhorar a qualidade do ensino na Medicina. Um questionamento resultante dessa mudança é se esse aumento de faculdades de Medicina implicará a formação de profissionais capazes de atender às demandas da sociedade contemporânea. Uma forma de responder a esse questionamento é conhecer o perfil dos egressos das instituições. Objetivo: Este estudo teve como objetivo avaliar o perfil dos egressos médicos formados em uma instituição de ensino superior do Nordeste do Brasil. Método: Realizou-se um estudo transversal do tipo pesquisa de campo com abordagem quantitativa. Egressos do curso de Medicina de uma instituição de ensino superior, formados no período de 2012-2019, foram avaliados por meio de um questionário enviado via e-mail, com perguntas de múltipla escolha. O estudo foi aprovado pelo Comitê de Ética da instituição. Resultado: Analisaram-se 127 questionários, o que corresponde a uma taxa de resposta de 13,8%, e o sexo feminino predominou ao representar 67,7% da amostra. O conhecimento sobre as Diretrizes Curriculares Nacionais durante a graduação foi relatado por 24,2% dos participantes. A maioria dos egressos demonstrou satisfação com o curso realizado e sentimento de preparo para atuação profissional como generalista. Em relação à residência médica, 90,5% dos egressos realizaram esse tipo de programa de especialização. A atuação profissional dos egressos na Estratégia Saúde da Família e no Sistema Único de Saúde (SUS) foi identificada em 66,9% e 84,3%, respectivamente. Sentimento de aptidão e de habilidade para lidar com educação em saúde, gestão da saúde e atenção à saúde da população foi identificado na maioria dos egressos. Conclusão: Identificamos uma boa satisfação ao final do curso e um sentimento de confiança para atuação profissional na maioria dos egressos. Aperfeiçoamento por meio de residência médica é um objetivo frequente entre os egressos. O SUS é um campo de trabalho para a maioria destes. Além disso, aptidões recomendadas pelas Diretrizes Curriculares Nacionais foram percebidas pelos egressos ao final da graduação. Futuros trabalhos com amostras maiores e multicêntricos são necessários para a avaliação do perfil dos egressos no Brasil.

Abstract Introduction: In recent years, there has been an increase in the number of medical schools in Brazil and, concomitantly, the interest in improving the quality of teaching in medicine has increased. One question resulting from this change is whether this increase in medical schools will imply the training of professionals capable of meeting the demands of contemporary society. One way to answer this question is to know the profile of the institutions' graduates. Objective: To evaluate the profile of medical graduates trained at a higher education institution in northeast Brazil. Method: A cross-sectional field research study with a quantitative approach was carried out. Graduates of the medical course of a higher education institution, graduated from 2012 to 2019, were evaluated through a questionnaire sent via e-mail, with multiple choice questions. The study was approved by the institution's ethics committee. Results: A total of 127 questionnaires were analyzed, which corresponds to a response rate of 13.8%; females predominated, representing 67.7% of the sample. Knowledge about the National Curriculum Guidelines during undergraduate school was reported by 24.2% of the participants. Most graduates demonstrated satisfaction with the course taken and a feeling of being prepared for professional work as a generalist. Regarding medical residency, 90.5% of the graduates attended this type of specialization program. Professional performance of graduates in the Family Health Strategy and in the Brazilian Unified Health System (SUS) was identified in 66.9% and 84.3%, respectively. A feeling of aptitude and ability to deal with health education, health management and health care for the population was identified in most graduates. Conclusion: We identified good satisfaction at the end of the course and a feeling of confidence for professional performance in most graduates. Improvement through medical residency is a frequent goal among graduates. The SUS is a field of work for most of these professionals. In addition, skills recommended by the National Curriculum Guidelines were perceived by them at the end of undergraduate school. Future studies with larger and multicenter samples are needed to assess the profile of graduates in Brazil.

A temática esporte nas provas de Educação Física do exame nacional de desempenho de estudantes (ENADE) de 2004 a 2021 / The sport theme in the Physical Education tests of the national students' exam (ENADE) from 2004 to 2021 / El tema del deporte en las pruebas de Educación Física del examen nacional de desempeño de estudiantes (ENADE) de 2004 a 2021

O presente estudo analisou as características dos itens sobre a temática esporte na parte de conhecimento específico das provas aplicadas aos cursos de graduação em educação física (licenciatura e bacharelado) no Exame Nacional de Desempenho de Estudantes (ENADE). Trata- se de uma pesquisa descritiva, exploratória e de natureza quantitativa. Foram examinadas 340 questões de conhecimento específico das provas e os relatórios sínteses da área de 2004 a 2021. A temática esporte apareceu em 117 itens/questões (34,4%), com maior presença nas provas do bacharelado. Eles apresentaram bom poder discriminatório, foram classificados como menos difíceis do que itens sobre outras temáticas em ambas as habilitações e a frequência dos objetos de conhecimento referenciados em cada habilitação pareceu coerente com as especificidades das atuações profissionais. Assim, a identificação dos itens sobre esporte não só permitiu observar as suas características e relação com outros assuntos como também fornecer informações para melhor preparação aos estudantes.

This study analyzed the characteristics of the questions on sports in the part of specific knowledge of the tests for undergraduate courses in Physical Education (degree and bachelor's degree) in the National Students' Exam (ENADE). This is a descriptive, exploratory and quantitative research. There were examined 340 specific knowledge questions from the tests and the summary reports in the area, from 2004 to 2021. Sports appeared in 117 items/questions (34.4%), with a greater presence in the bachelor's degree tests. They presented good discriminatory power, and they were classified as less difficult than items on other topics in both qualifications; and the frequency of knowledge referred in each qualification seemed to be coherent with the specificities of professional activities. Thus, the identification of items/questions about sports, not only allowed the observance of their characteristics and relationship with other subjects, as well providing information to better prepare students.

Este estudio analizó las características de las preguntas sobre la temática deporte en la parte de conocimientos específicos de las pruebas aplicadas a las carreras de educación física (licenciatura y bachillerato) en el examen nacional de desempeño de estudiantes (ENADE). És una investigación descriptiva, exploratoria y cuantitativa. Se examinaron 340 preguntas de conocimiento específico de las pruebas y de los informes resumidos en el área de 2004 a 2021. La temática del deporte apareció en 117 ítems/preguntas (34,4%), con mayor presencia en las pruebas de bachillerato. Presentaron un buen poder discriminatorio, se clasificaron como menos difíciles que los ítems sobre otros temas en ambas cualificaciones y la frecuencia de los objetos de conocimiento en cada cualificación parecía coherente con las especificidades de las actividades profesionales. Así, la identificación de ítems sobre deporte no sólo permitió observar sus características y relación con otras materias sino también brindar información para preparar mejor a los estudiantes.

El tratamiento metodológico de la evaluación atendiendo a su función educativa / The methodological treatment of the evaluation taking into account its educational function

Fundamento: el tratamiento metodológico de la evaluación atendiendo a su función educativa contribuye al aprendizaje de los estudiantes y a la calidad del proceso pedagógico en la carrera Medicina. Objetivo: diseñar un sistema de acciones para el tratamiento metodológico de la evaluación atendiendo a su función educativa. Métodos: se realizó una investigación de desarrollo en la Universidad de Ciencias Médicas de Holguín, Facultad de Ciencias Médicas "Mariana Grajales Coello", durante el año 2022. Se utilizaron como métodos teóricos el análisis-síntesis, la inducción-deducción y la modelación; empíricos la revisión de documentos y el criterio de especialistas. La investigación se llevó a efecto en tres etapas y se utilizó el enfoque mixto para obtener evidencias de su viabilidad. Resultados: se explicó el mecanismo psicopedagógico que fundamenta la función educativa de la evaluación. Se definió el sistema de acciones para su tratamiento metodológico atendiendo a su función educativa, de acuerdo con el contenido a aprender y las características del modelo del profesional de la carrera Medicina; para lograrlo se precisaron acciones en el orden de los conocimientos, habilidades y hábitos, relaciones de los estudiantes con el mundo y las experiencias de la actividad creadora. Conclusiones: se diseñó un sistema de acciones para el tratamiento metodológico de la evaluación atendiendo a su función educativa, el cual fue valorado como adecuado para su implementación, por los especialistas.

Background: the methodological treatment of the evaluation taking into account its educational function contributes to student learning and the quality of the pedagogical process in the Medicine degree. Objective: design a system of actions for the methodological treatment of evaluation taking into account its educational function. Methods: a development investigation was carried outin the Faculty of Medical Sciences at "Mariana Grajales Coello" University of Medical Sciences of Holguín, during the year 2022. Analysis-synthesis, induction-deduction and modeling were used as theoretical methods; empirical the review of documents and the specialists criteria. The research was carried out in three stages and the mixed approach was used to obtain evidence of its viability. Results: the psychopedagogical mechanism that underlies the educational function of the evaluation was explained. The system of actions for the methodological treatment of the evaluation was defined taking into account its educational function, according to the content to be learned and the characteristics of the model of the Medicine degree professional; To achieve this, actions were required in the order of knowledge, skills and habits, students' relationships with the world, and the experiences of creative activity. Conclusions: a system of actions was designed for the methodological treatment of the evaluation taking into account its educational function. The opinion of the specialists was adequate in relation to the system of actions.

Aplicación de guías didácticas en el proceso enseñanza aprendizaje de Farmacología General / Application of teaching guides in the teaching-learning process of General Pharmacology

Fundamento: la evaluación del aprendizaje implica el control y la valoración de los conocimientos, habilidades y hábitos. Objetivo: mostrar los resultados del examen final ordinario en la asignatura Farmacología General, después de la aplicación de las guías didácticas. Métodos: se realizó una investigación descriptiva transversal en la Universidad de Ciencias Médicas de Villa Clara, en el periodo 2020-2021, se trabajó con la matrícula del curso referido y se compararon los resultados con los del curso 2019 -2020. Se utilizaron métodos teóricos, empíricos, y matemáticos. Resultados: con el uso de las guías, la promoción aumentó en un 3,56 %, resultado altamente significativo. Las calificaciones de 5 aumentaron un 17,9 % y las de 3 y 2 disminuyeron un 9,4 % y 3,6 % respectivamente. Considerando el contenido y tipo de preguntas, el tema Prescripción y uso racional de fármacos, evaluado con una pregunta de tipo completar la respuesta correcta, mejoró la media de las calificaciones en 0,59, seguido del contenido de los temas Teoría de receptores y Sistema nervioso autónomo, donde este indicador aumentó un 0,39, todos en el curso 2020-2021. Conclusiones: los resultados en el examen final ordinario en Farmacología General, posteriores al uso de las guías didácticas, mejoraron considerablemente la promoción en la asignatura.

Background: the evaluation of learning involves the control and assessment of knowledge, skills and habits. Objective: to show the results of the ordinary final exam in the subject General Pharmacology, after the application of the teaching guides. Methods: a cross-sectional descriptive research was carried out at Villa Clara University of Medical Sciences, in the academic year 2020-2021, we worked with the enrollment of the referred course and the results were compared with those of the 2019-2020 academic year. Theoretical, empirical, and mathematical methods were used. Results: with the use of the guides, promotion increased by 3.56%, a highly significant result. Ratings of 5 increased by 17.9% and ratings of 3 and 2 decreased by 9.4% and 3.6% respectively. Considering the content and type of questions, the topic Prescription and rational use of drugs, evaluated with a question such as completing the correct answer, improved the average of the grades by 0.59, followed by the content of the topics Receptor Theory and System autonomic nervous system, where this indicator increased by 0.39, all in the 2020-2021 academic year. Conclusions: the results in the ordinary final exam in General Pharmacology, after the use of the teaching guides, considerably improved promotion in the subject.

Assessment of medical students' Surgery knowledge based on Progress Test / Avaliação do conhecimento de estudantes de medicina na área de Cirurgia a partir do Teste de Progresso

ABSTRACT Progress Testing (PT) is an assessment tool whose use has grown throughout Brazil in the last decade. PT makes it possible to assess the students' knowledge gain throughout the undergraduate course and, for their interpretations to be valid, their items (questions) must have adequate quality from the point of view of content validity and reliability of results. In this study, we analyzed the psychometric characteristics of the items and the performance of students in the content area of surgery from 2017 to 2023. For the analyses, we used the assumptions of Classical Test Theory, Bloom's taxonomy and Cronbach's alpha reliability coefficient. The items were easy (average difficulty index between 0.3-0.4), with fair to good discrimination (discrimination index between 0.3-0.4) and with a predominance of medium to high taxonomy. Reliability remained substantial over the years (>0.6). Students' knowledge gain in surgery was found to be progressive and more important from the 3rd year of the undergraduate course, reaching approximately 70-75% in the 6th year. This measurements framework can be replicated in other contexts for a better understanding of student learning and for qualification of evaluation processes.

RESUMO O Teste de Progresso (TP) é uma ferramenta de avaliação cujo uso tem crescido em todo o Brasil na última década. O TP permite avaliar o ganho de conhecimento dos estudantes ao longo do curso de graduação e, para que suas interpretações sejam válidas, é preciso que seus itens (questões) tenham qualidade adequada do ponto de vista de validade de conteúdo e confiabilidade de resultados. Neste estudo, analisamos as características psicométricas dos itens e o desempenho dos estudantes na área de cirurgia do TP de 2017 a 2023. Para as análises, usamos os pressupostos da Teoria Clássica dos Testes, a taxonomia de Bloom e o coeficiente de fidedignidade alfa de Cronbach. Os itens se mostraram fáceis (índice de dificuldade média entre 0,3-0,4), com discriminação de regular a boa (índice de discriminação entre 0,3-0,4) e com predomínio de questões de média a alta taxonomia. A confiabilidade se manteve substancial ao longo dos anos (>0,6). O ganho de conhecimento dos estudantes em cirurgia é progressivo e mais importante a partir do 3º ano do curso de graduação, chegando a aproximadamente 70-75% no 6º ano. Este arcabouço de aferições pode ser replicado em outros contextos para melhor compreensão do aprendizado dos estudantes e para qualificação dos processos avaliativos.

Clinical simulation scenarios for the planning and management of infusion therapy by nurses / Escenarios de simulación clínica para la planificación y gestión de la terapia de infusión por enfermeras / Cenários de simulação clínica para o planejamento e gerenciamento da terapia infusional pelo enfermeiro

ABSTRACT Objective: to build, evaluate and test two clinical simulation scenarios for the planning and management of infusion therapy by nurses. Methods: methodological study, with construction of scenarios based on the NLN Jeffries Simulation Theory and the theoretical model Vessel Health Preservation; evaluation of the scenario design by judges, with calculation of the Modified Kappa Coefficient (MKC); testing scenarios with the target audience. Results: scenarios built for: 1. Patient assessment and vascular device selection; and 2. Identification and management of deep vein thrombosis. In the evaluation by judges, testing of validated scenarios in relation to educational practices and simulation design, the items evaluated presented MKC values ≥ 0.74. Conclusion: two evidence-based scenarios related to infusion therapy were constructed, with high levels of agreement among judges regarding their design. In testing with nurses, good results were obtained regarding the design and structuring of educational practice.

RESUMEN Objetivo: construir, evaluar y probar dos escenarios de simulación clínica para planificar y gestionar terapias de infusión por enfermeros. Métodos: es un estudio metodológico, con escenarios basados en la Teoría de la Simulación de Jeffries NLN y en el modelo teórico Vessel Health Preservation; evaluación del diseño de los escenarios por jueces mediante cálculo del Coeficiente de Kappa Modificado (CKM); prueba de los escenarios con el público-objeto. Resultados: escenarios construidos para: 1. evaluación de pacientes y selección de dispositivos vasculares; y 2. identificación y manejo de trombosis venosa profunda. En la evaluación por jueces, en la prueba de los escenarios validados respecto a las prácticas educativas y en el diseño de la simulación, los ítems sopesados alcanzaron el CKM ≥ 0,74. Conclusión: se construyeron dos escenarios sobre evidencias relacionadas con la terapia de infusión, con valores de concordancia altos entre los jueces, referente a su diseño. En las pruebas con enfermeros, se obtuvieron buenos resultados en cuanto al diseño y a la estructuración de la práctica educativa.

RESUMO Objetivo: construir, avaliar e testar dois cenários de simulação clínica para o planejamento e gerenciamento da terapia infusional pelo enfermeiro. Método: estudo metodológico, com construção de cenários baseado na NLN Jeffries Simulation Theory e no modelo teórico Vessel Health Preservation; avaliação do desenho dos cenários por juízes, com cálculo do Coeficiente de Kappa Modificado (CKM); testagem dos cenários com o público-alvo. Resultados: cenários construídos para: 1. Avaliação do paciente e seleção do dispositivo vascular; e 2. Identificação e gerenciamento de trombose venosa profunda. Na avaliação por juízes, na testagem dos cenários validados em relação às práticas educativas e ao design da simulação, os itens apreciados apresentaram valores do CKM ≥ 0,74. Conclusão: foram construídos dois cenários baseados em evidências relacionadas à terapia infusional, com elevados valores de concordância dos juízes, quanto ao seu desenho. Na testagem com enfermeiros, obteve-se bons resultados quanto ao desenho e estruturação da prática educativa.